|| [РОВ горизритяльняе масшта 


Ра г, 
> ‚ 


| \ | | | | 


| деи Вол КОВ, Кирилл Реш кё,/ й 
’ Ореп $оигсе ми — | Ореп Зоцгсе ВОВМ$ 
| ритм Теат Уапфех Реуе!ортеп! Теат Уапаех 

\\\ \ \ |@оа в 


| 


Яндекс 


Ореп зоигсе ВОВМФ 
аеуеюртеп 
а: Уапаех Соца 


’ Рочогезо(, Огееприт сотиб\щог$ 


’ М/АЁЕ-С, Одуззеу тапщатег$ 


Ро${агез (Е 
а{ Уапаех Соца 


Миллионы ОРУ 
Петабайты данных 


Тысячи кластеров 
От 0,5 до 80 СРИ-ядер 


В основном НА-кластеры 


Очень надо 


Типичный кластер Розагез о! 


К\М/-запросы 
— 1% | [одс герйсаНоп = \ММАЕ а. 
} м аки —м_—— 
ОБес 
тогаде 
ОГАР/ Очцогит герйсайоп 


МВ 
Бэкапы 


= -————_____  МВО-запросы 


Типичное приложение 


Арр БаскКепа 


[ оаа Ба!апсег Арр Баскепа = 


Арр Баскепа 


Типичное приложение 


Арр Баскепа = 


[ оаа Ба!апсег Арр Баскепа (2) 


Арр Баскепа 


У разных шардов 
разные ресурсы с 


Кед! ег 


Саспе 
Геме! 1 
Ееме! 2 
° Сотрщайопа! ромег Е 
° НАМ 
Мат Метогу КАМ 
. 0$К|О 


о М @\мМ/о ГК а ГО О @ © (1 Рпуз!са! КАМ \Мииа! Метогу 


5есопаагу 5{огаде Ое\у 


1. Дисклеимер 


о мы хотим от шардир 


6. Открытый процесс разработки 


Вазс 1ороюду 


Степ 


Кощег 


гкО\М/ разеа арргоасп 


|М$ЕКТ 1МТО + МАЦУЕ$ (1, по\\()): 
| М$ЕВТ дата ВЕТИВММС спа: 
ОРБАТЕ \М/НЕВЕ са = ...; 


Р|аппег поок . РозогезоЕ Ежепзюп 
базеа зошйоп ‚ Сизют Ехес М№одез 


. 5000-6000 ТРС оп 40 000 
\Магепоизе 


° Раш м рат С 


те [8] ацпиб.сот/гезйке/гощег 


[=] 


я 


р9_апа!уге апа_геммте () 


——оэнньчезнишиый ( | 
—_ | 


мы: Г 
р 2 | 


Вощег 


ро${вге5=# 1М$ЕВТ 1МТО х (1а)МАЕУЕ$ (14); 
МОТ!СЕ: 5епа ачегу То $Вага($) : $Пага02 
1МЪЕВТО 1 

ро${еге$=Я 


Назп ог по] 
ю пазй? 


Назп ог по] 
ю пазй? 


Мапу гощег$ 


У 
= 0) 


— 


0) 
_) 


= 
0) 


Мапу гощег$ 


—_ —] 
Арр Баскепа 


Арр Баскепа 


Соогатаюг 


Соогатаюг 


 опага гебаапста 
‚ Мападта гощег$ 
’ Мападта Кеу Вапде$ 


’ Несоуету (?} 


Соогататог 


опага геба!апсег 


Е\еп ри 


| М/ОВКЕОАБ 


опага геба!апсег 


&-5рШ 


| МОККЕОАРО 


опага геба!апсег 


> /*а: 1 с: Итт*/ зеесЕ 1; 

> з@есЕ соттеп*_Кеуз, ачегу соип\, изег_ те Кот ряс$_ве{_$а*5() тй 1; 
-[ ВЕСОВО 1 ]+---------------------- 

соптепЕ_Кеус | {"а": "1"} 

ацегу_сочцпЕ |1 


изег ите | 6.000000000000363е-06 


" [=] сск.ги/32Хе\у5 


Ми!зпага Очцепез$ 


Озег 15 а!омеа {о ао БОЕ изпа Кощег Соппесйоп, 
мгисй мм ти рех ачегу © зпПага$ 


СВЕАТЕ ТАВЕЕ (шо; = 
ЮКощег 


СКЕАТЕ ТАВЕЕ (1111); Е 


э---& 


СКЕАТЕ ТАВЕЕ (1111); 


Мишзпага Очепез 


пем/5=> СКЕАТЕ ТАВЕЕ ага е$ ( 
14 ЗЕ АЕ МОТ МИ РЕМАКУ КЕУ, 
иг! ТЕХТ МОТ МУЦ ЧУМЮОУЧЕ, 
}; 
МОТСЕ: 5еп4 ачегу то $ПВага($) : °Пагд01,$Вага02 


СВЕАТЕ ТАВЕЕ 


Мишзпага Очепез 


пе\/5=> $ЕТЕСТ * ЕВОМ аг@<ез; 
МОТСЕ: 5еп4 ачегу то $ПВага($) : $Лаг01,$Вага02 
а | ий | 


1235 | ВЕрз://\млмлм. пафиге.сот/агисе$/441586 | 
1073741825 | ПЕрз://пе\м$.усотЬтаюг.сот/Кет?1аа=х | 


(2 го\м$) 


эпае эпага Очцепе$ 


1МЪЕКТ ИМТО, ЗЕЁВЕСТ 


эпае эпага Очцепе$ 


пем/5=> |М$ЕКТ 1МТО агиае$ (14, ип) МАШОЕ$ (...); 
МОТГСЕ: 5еп4 ачегу {о $Пага($) : $Лага01 


| МЪЕКТО 1 


5пае эпага Очепе$ 


пе\/5=> ЗЕТЕСТ * ЕВОМ агице$ \ММНЕВЕ 1а > 123; 


МОТГСЕ: 5еп4 ачегу {о $Пага($) : $Лага01 
а | ий | 


1235 | ВЕрз://м/мим. пафиге.сот/агисе$/441586 | 


(1 гом/) 


МВ: опагата кеу тау бе сотрозке 


\М\Мопа эпага 


Арр Баскепа 
Арр Баскепа 


Арр БаскКепа 


оцтег 


Сци$ сотрайо!Ку? 


Арр Баскепа 


Арр Баскепа К 


Арр Баскепа 


оцтег 


Гаепсу со${$ 


[ аепсу ауегаде (тз) 


{р$ Роз19дгез Рабоипсег ЗРОВН 109 ЗРОНВ РаСа1 
500 0,910 15 1,266 1,016 1,493 
1000 0,813 1,034 4,236 1,178 51а 
1500 0,785 1015 — 1,261 2 72 
2000 0,788 0,990 7,656 1,282 = 
2500 0,771 0,971 12,289 1,347 1,664 
2700 07.70 0,972 52,701 1,314 РУ 
3000 0,767 0,979 1249,946 1,418 1,748 
5000 0,761 0,846 —- Е 5ЭР 2,265 


* Роз1огез: Ооскег сотатпег (\Мегзюоп 13) 


** Рабоипсег: ба!апсег {о Ооскег сотщаштег 


Нужны пруфы, 
Билли 


оНйио.сот/рд-зпаг4та/пем/-аето 


Собирает статьи из разных СВЕАТЕ ТАВЕЕ аг се ( 

ИСТОЧНИКОВ И СОСТОИТ ИЗ: 4 ЗЕРНАЕ МОТ МИЦ. РЕИМАВУ КЕ\, 
иг! ТЕХТ МОТ МУН. МОЧЕ, 

° ВФ рагзег {Че ТЕХТ МОТ МИЦ, 


о АР]| Сегу/ег дезсирИоп ТЕХТ МОТ МУШ 


Запросы 


Использует внутри только два запроса 


-- Веа4 аг<е$ 


ЗЕЁЕСТ * ЕКОМ ага ес; 


-- Сгеае ап агие 


|М$ЕВТ 1МТО агиче$ (14, ит, Ще, дезсирЧоп) 


МАЦОЕ$ (тигтигНа$В(а.Ц ВЕ), а. ОКЕ, аТЖЕ, а.ОБезсирИ оп); 


Как запустить 


ехрог{ РАТАВА$Е_ЦВ!="роз{еге$://пем/5@|осаШо$:5432/пем/з?.." 
таке 


./гсрагзег 


‚/ар1зегмег 


Как шардировать 


| 2 3 4 


Собрать ЗРОВ Запустить Настроить Запустить 
ИЗ ИСХОДНИКОВ оРОВН-гощег шардирование приложение 
в Вощег Аатт 
Сопзо|!е 


1. Собрать из исходников 


©) Зеагсй ог итр {0... Ри! гедиез{$ 15зиез5 Магкер!асе Ехрюге 


9 ра-5Вагата / зраг  Рчыс <Х ЕЧИ Рт$ + <> Упмасв 5 * % Рок 9 - 2 $\апеа 97 - 


<> Софе (с) 155ие5 {1% РУ гедие$ 4 (>) Асцопз ШП Роес$ Ш М © $еситу | тядм$ — 3 $еитад$ 


Р тамег > Р 23 ыапспез$ С3З\(ад$ Со {0 Ше АЗА Не > АБош 283 


ЗЧаее$$ Ро${аге$ биегу Вощег 


= в ит в гегас{ога БИ $По\па пойсе те$5аде$ (#80) У 7с39850 15 поиг$ адо <) 407 соттИ$ 
СП Веадте 


„УИВуБ гип гедге$$ 2 тог\й$ адо 88 \Лем/ Псепзе 


97 ${аг$ 
Ба!апсег Оптпе геоад !ог гощег сопйдигайоп (#77) 2 тогий$ адо 


5 мас та 
ста Опте геоаа {ог гощег сопйдигапоп (#77) 2 томй$ адо 


сок 


9 ЮК$ 


сопйд-ехатр!е Вегас‘ог БаскепаЛгогцепа гшез, Йх спе ащй (#75) 2 тогий$ адо 


соогататог Опте геоад Гог гощег сопйаигайоп (#77 2 тогий$ адо 
9 д 9 Вееа$е$ 


доскег Моге гедге$$юп 1е$1$ (#74 2 тогий$ аао 
9 ( ) 9 © з1ад$ 


906$ ге{ас‘ог а БИ $Лом/па пойсе теззадез (#80) 15 Поуг$ адо Стема а пом това 


дгрс Ва!апсег Арр (#20) 5 тоИ$ адо 

рка гегас‘ог а БИ $Поммпа пойсе те$$аде$ (#80) 15 Лоуг$ адо Раскаде$ 

ргото$ Огор ипизеа биегу $егмсе ргото$, зпсе соог4ата‘ог-гощег те... 3 тогий$ адо № раскадез рибзВед 
РиБИЗИ уоцг Яг${ раскаде 

ааь Ах Бийа (#61) 3 тогий$ адо 

гощег гегастог а БИ $Помлпа пойсе те$$аде$ (#80) 15 Лоуг$ адо 


Сомищог$ 7 
$91 АЧа $Пагата гШе$ зиррой т соогата{ог (#48) 3 тогий$ адо 


{е5 гегастог а БИ $По\мпа пойсе те$5$аде$ (#80) 15 Лоуг$ адо и С м и. 2 и | 


РН орла голая ог гогигог сопЯаигАЯЙоОя (#77) 7 ОР! РС а@ао 


2. Запустить 


Вызвать ./5раг-гг гип -с сопЯ.уат| 


// зоте соптоп $е{тя$ 
гиез: 

тотщепЯ_ги[ез$: 

- // Ожег, ОВ, Ащй, РооЙтв 

баскепа_гиез: 

- // Озег, ОВ, Ащ, РооЙтв 

5ПагС$: 

5Пага01: 

// Соппесйоп зе тв$ 


Лага02: 


// Соппесйоп зе тв$ 


3. Административная консоль 


—> пе\и5-4ето #®:(тат) Х рза! "По$=юсаШоз{ $$1тоде=Ч5ае 


и5ег=пе\м/5 аАбпате=пем/5 ро{=7432, 


5ОРК гощег аатт соп$о|е 
Неге уоц сап сопИгиге уоиг гоиИпя гше$ 
Уоц сап Нп4 доситетжайоп Пеге 
ИКре://=КПиб.сот/рв-5Наг4тв/зраг/гее/та$%ег/4ос$ 
рза| (14.5 (НотеБге\ми), зегуег сопзо|е) 


Туре "Вер" Гог Пер. 


3. Административная консоль 


пем/5=> $НОМ/ $Пагаб; 


||${тя Аата $Пага$ 


Дата$Пага мм 10 $Пага01 
Дата$Пага мм 10 $Пага02 


(2 го\м5) 


3. Административная консоль 


пем/5=> АБО $ЗНАВО!МС ВОЕЕ гче1 СОЦУММ$ 14; 
ааа зПагатя гше 
сгеа{е4 Пагатя со|игпп [14] 
(1 гом/) 
пем/5=> АОО КЕУ КАМСЕ Кма1 ЕВОМ 1 ТО 1073741823 ВОЧТЕТО $Вага01; 
ааа Кеу гапёе 
сгеа{е4 Кеу гапяе 1гот 1 {о 1073741823 
(1 гом/) 


пе\м/5=> АБО КЕУ КАМСЕ Кг!42 ЕКОМ 1073741824 ТО 2147483647 ВОЧТЕТО $Вага02; 


3. Административная 


пем/5=> $НОМ/ $Ваг4тг_ги[ез; 
|${та °Паг4тя ги[е$ 
5Нагатя гие ге] мий соитп 5е*: [14] 
(1 го\м) 
пем/5=> $НОМ/ Кеу_гапеез; 


Кеу гапое 10 | $Пага 10 | 1о\мег Боипа | Уррег Боипа 


---— не н---------=-= 
Ка 1 | <Лага01 |1 | 1073741823 
кКна2 | <Рага02 | 1073741824 | 2147483647 


(2 го\м5) 


КОНСОЛЬ 


4. Подключиться к роутеру 


—> пем/5-4ето вК:(тат) Х р$а| "По$=юоса!о${ рои=6432" 
р$а| (13.3, зегуег 9.6.22) 

Туре "Вер" Гог Пер. 

ЧАбпате=> СКЕАТЕ ТАВЕЕ агиче$ ( 

абпате(> 11а $ЕМАЕ МОТ МУ: РКЁМАКУ КЕУ, 
абпате(> ип ТЕХТ МОТ МИЦ 9УМОУЧЕ, 
абпате(> ие ТЕХТ МОТ МИШ,, 

Чбпате(> а4езсирИоп ТЕХТ МОТ МУ 
Абпате(> ); 

МОТ!СЕ: 5епа аиегу {о $Пага($) : $Нага01,5Вага02 
СВЕАТЕ ТАВИЕ 


4. Подключиться к роутеру 


Чбпате=> |М$ЕВТ МТО агЯ<е$ (14, ит, «Ще, дЧезсирЧоп) 

\МАГОЕ$ ('1235', 'ВЕр$://\ммммм. пафиге.сот/аг с е$/441586-022-01516-2' 
'Эстепсе пее$ тоге гезеагсй зо Н\маге епетеегс', 'поре'); 

1М$ЕКТ О 1 

Чбпате=> |М$ЕВТ 1МТО аги<Ее$ (14, ит, {Ше, ЧезсирЧоп) 

\/АГОЕ$ ('2147483644", '/рз://м/мим. пафиге.сот/агисе$/441586-022-01516-2* 
'степсе пеед$ тоге гезеагсй 5оН\маге епетеегс', 'поре’); 


| М5ЕВТО 1 


4. Подключиться к роутеру 


пем/5=> ЗЕТЕСТ * ЕВОМ агисе$ М/НЕВЕ 14 > 1; 
МОТСЕ: 5еп4 аиегу то $Вага($) : $Вага01 


а | ий | {Че | ЧезсирЧоп 


1235 | ВИрс://м/мим.паиге.сот/агИс!е$/441586-022-01516-2 | $‹епсе пее4$ тоге гезеагсН зо \маге епатеег$ | поре 
(1 гом/) 
пе\ми5=> $Е1ЕСТ * ЕКОМ агисез \М/НЕВЕ 14 < 2147483647; 
МОТСЕ: 5еп4 диегу фо $Вага($) : $Лаг902 
а | ий | {Че | Чезсироп 
=== еее феееененнне-- 
1073741825 | ИЕрз://пем/5усотЬБтаог.сот/Кет?!4=29201000 | $сааЫе Ро%еге5 (Е Соппесйоп Родег (в ВиБ.сот/уапаех) | поре 


(1 гом/) 


Задавай вопросы 
в Т@едгат-чате 


Как помочь’? 


сск.ги/З2УЗТ$ 
Отправляй 
21 стопе ВЕр$://ИПиБ.сот/ря-5Наг@тз/зраг ри! геаце$15$ 
и 155$и4е$ 
са раг 
сск.ги/З2 У З\/\м 


таке гип 


Запусти демоприложение 


ССК.ги/3З2У ЗИ т 


ИУ / 
| У | у 
| | / Г 
й | у 

| и | 

{ | 

} 

у 


Спасибо! — 


‚Денис Волков и 


Кирилл Решке 
Орел боигсе ВОВМ$ 


М | реп боигсе ВоВМ$ 
реумортели Теат апаех | 


ремеюртеп! Теат уапаех 
_ Чиа 


гезНКе @уапдех-1еат.ги 


‚Яндекс 


| | 
| Обратная связь 
и комментарии 
к докладу по ссылке” 


